При проектировании многомодальных систем за основу берутся способы естественной коммуникации между людьми, а также моделируется поведение человека в аналогичной ситуации. Многодомодальность позволяет вести более эффективный диалог за счет дублирования передаваемой информации по разным информационным каналам и выбирать (замещать) доступные для пользователя модальности. Выделяются два типа модальностей: входные и выходные. Входные отвечают за восприятие информационных потоков, идущих от человека (речь, звуки, движения тела, рукописный текст и др.). Выходные модальности обеспечивают пользователя необходимой информацией о событиях, происходящих внутри системы, и поступающих сигналах. Знания о механизмах восприятия и обработки информации человеком, моделировании когнитивных и поведенческих процессов позволяют разработать многомодальные интерфейсы, обеспечивающие привычные и естественные для пользователя способы взаимодействия.
В статье описаны перспективные направления к использованию сервисных роботов (роботов-ассистентов) в области пилотируемой космонавтики. Проанализированы концептуальные подходы к организации внутренней среды сервисных роботов и внешней рабочей среды для совместной деятельности человека и сервисного робота.
Оптимизация работы с мультимедийными ресурсами с целью сокращения передаваемого объема данных между пользователями является одной из проблем приложений видеоконференцсвязи. В статье описаны алгоритмы и программные средства, позволившие провести оптимизацию разработанного кроссплатформенного приложения видеоконференцсвязи. Основными этапами работы средств видеоконференцсвязи являются: создание и удаление аудио- и видеопотоков данных, их передача от сервера к клиенту и обратно, создание цепочек потоков и их поиск на сервере. Вышеперечисленные этапы присутствуют в любом приложении видеоконференцсвязи и требуют оптимизации в связи с присутствием в них главных процессов и сложностью архитектуры самого приложения. Поэтому в ходе работы было выполнено упрощение клиентской части приложения и реорганизация структуры серверной части приложения. В режиме приема-передачи данных разработанное приложение после проведенной оптимизации по сравнению с программой «Skype» стало потреблять почти в 10 раз меньше оперативной памяти и в 2 раза меньше процессорного времени.
В статье обсуждаются ассистивные информационные технологии, которые представляют собой специальное программное и/или аппаратное обеспечение, предназначенное для повышения доступности информации и средств коммуникации для людей с ограниченными возможностями здоровья. Предложен комплекс ассистивных информационных технологий на базе аудиовизуальных речевых интерфейсов пользователя.
Способность приложений анализировать текущие условия эксплуатации, в том числе, текущее состояние пользователя, физического окружения, вычислительных ресурсов, и динамически адаптировать сценарий взаимодействия с пользователем является одним из главных требований при разработке прототипов интеллектуальных пространств. С увеличением решаемых задач и числа обслуживаемых пользователей становится затруднительным держать под контролем множество программных и аппаратных модулей, задействованных в интеллектуальном пространстве, поэтому необходимо математическое обеспечение и программные средства, реализующие контроль совместной работы распределенных модулей. В статье описывается разработанная структура модели управления распределенными модулями интеллектуального зала и используемые многомодальные интерфейсы для обеспечения естественности человеко-машинного взаимодействия.
Установление психологически комфортных условий взаимодействия является одним из основных требований при разработке пользовательских интерфейсов к социальным роботам. Естественность внешнего вида человекоподобных роботов и способов их коммуникации способствует самораскрытию пользователя и повышению эффективности диалога. В статье проанализированы способы оценивания успешности диалога, а также средства регистрации и анализа предпочтений пользователей, необходимые для настройки профиля пользователя и персонифицированного обслуживания информационным роботом.
При разработке интерактивных динамических веб-приложений необходимо учитывать не только используемые типы данных и способы их ввода/вывода, но и обеспечить способность приложения анализировать текущие условия, в которых будет проходить взаимодействие с пользователем, и соответствующим образом адаптировать мультимедийный контент с целью повышения удобства и естественности человеко-машинного диалога. В статье проведен анализ современных работ, связанных с автоматической генераций веб-интерфейсов, проектированием многомодальных пользовательских веб-приложений, а также рассмотрены подходы к описанию, извлечению и обработке контекстной информации, необходимой для настройки веб-интерфейса к текущим условиям эксплуатации в процессе взаимодействия с пользователем.
Рассматривается вариант системы интерактивного телевидения, использующей многомодальный интерфейс для заказа мультимедийного контента, интересующего пользователя, и управления стандартными функциями телевизора. Разработанная диалоговая модель на основе аннотированной базы данных по телепередачам и каналам обеспечивает поиск и выбор необходимой передачи с ее последующей трансляцией.
1 - 8 из 8 результатов